iT邦幫忙

2024 iThome 鐵人賽

DAY 9
0
AI/ ML & Data

認識AI與NLP的30日旅行團系列 第 9

Day9 AI音樂(生成、聲音轉換、音樂訓練、抓出純人聲)

  • 分享至 

  • xImage
  •  

AI除了在影像生成和處理的方面有建樹之外,在音樂的方面也有不同的創新。

雖然在音樂方面的突破沒有圖像、文字來的引人注目,但是對於音樂創作的人來說,又是一把雙面刃的誕生。


AI音樂生成

這裡有沒有去用過suno的人?如果有用過一定會被驚艷到。當時在音樂生成AI剛被推出的時候我就有去嘗試過,只能說,之前有一位加說自己要沒工作的事情還真的有可能發生。

其實一開始我有在其他的網站上使用過AI生成,但是出來的結果除了糟好像沒有別的形容詞,因為不以音樂風格很奇怪、詞很奇怪,連音調都很奇怪,簡直就是一個四不像。

但在使用了suno之後,讓我對AI音樂生成的印象整個大改觀。

當然,在現階段取代掉作曲家之類的事情是不太可能發生的,因為專業性還擺在那裏,音樂也不只是技術的呈現,更多的還是經歷與情感的累積。

不過當天我常是的時候,不管是我自己生成的歌曲、其他人生成並分享的歌曲,純音樂、流行樂、古典樂、鋼琴曲,甚至是台灣六零年代感的台語歌,竟然在旋律上都維妙維肖。

唯一我看出來的缺點,只在歌詞上,因為我是單純輸入提是詞請他幫我生成音樂的,所以歌詞也都完全由AI幫我做填詞。

但仔細聽會發現很多奇怪的地方,比如:

  1. 為了押韻而押韻,就會聽起來很像兒歌
  2. 詞和曲不匹配,就形成了慈在配合曲調斷句時,會很奇怪
  3. 詞與詞之間僅在表面的關聯性,沒有更深層的情感,比如夏天可能就是變成海風+陽光+冰淇淋,有關聯,但放在一首歌裡完全沒意義

除了詞方面,在曲調創作上卻是完全沒有問題的,所以其實只要把詞換掉,即使是沒有音樂相關背景的人,也可以很快地擁有一首自己的歌。

厲害吧。

音樂提取文字

我覺得生在我們這個時代真的是既幸運又不幸的,幸運的是,許多工作都可以由AI幫忙,所以我們有更多的時間去拓展自己的想像、去做自己想做的事;不幸的事,在以前可能懂一點點,有一手技能就可以謀生,現在可能要跨不知道多少領域,並且懂很多AI方面工具的應用,才能夠跟上時代。

真的應了那句話:「這是最好的時代,它允許每個人擁有夢想;但也是最壞的時代,所有人懷揣著夢想前仆後繼地被埋葬。」(我也忘記是哪本書裡看到的了)

為什麼突然感性了起來XD

其實現在要介紹的工具就和這個有關,想當初,錄音文本要打成逐字稿、小說家寫在紙上的文字要請專門的滕打員,現在呢?丟給AI,幾分鐘就完成了。

像現在的雅婷逐字稿、sea meet等等,都是不懂程式的人動動手指頭就可以使用的工具,如果想要免費,懂一點程式的還可以直接引用whisper模型,想怎麼用就怎麼用。

如果那些被淘汰掉技能的人,又能怎麼辦呢?

只能說,時代的浪潮終究是後浪推前浪的,要嘛拚著和後浪一起拔高,要嘛帶著昔日的光榮黯淡落幕。

從音樂中抓出純人聲

不只從音樂,從會議記錄、聊天過程中抓出純人聲都是可以的,想要自己製作KTV純音檔?那可以試試。

現在網路上也有許多配套措施,音頻提取器、人聲背景聲分辨器,網路上隨便找都有,只是效果、價錢的差別而已。

當然,也有一些開源的軟件,比如URV5等等,都可以去嘗試看看(如果會寫程式的話啦),網路上有很多相關的教學,如果真的不會,我也是可以單獨開一章講講XD

聲音轉換

其實到目前為止,我覺得聲音轉換還沒有我特別覺得很真實的。(或許只是我沒用到,有好用的歡迎推薦)

就跟換臉一樣,聲音當然也可以通過AI做代換,不管事文字轉語音、語音轉語音,都是現在蠻夯的應用。

之前在線上KTV出現的時候,各種魔音、娃娃音、男音女音觀世音(?)的變換就流行過一段時間,現在可以通過AI訓練,在熟悉你的聲調後,把別人的聲音或文字內容套進你聲音的模板,生成出來。

當然,用在日常生活中是有趣好玩的,如果用在什麼犯罪行為……請參考中華民國刑法,謝謝。


今日小結

今天對於AI在音樂上的應用做了一點點介紹,不管你對這個議題還不了解或很熟悉,都希望可以帶給你一些收穫。

上面的各種分類只是一個概括,還有許多音樂的相關延伸應用,比如線上AI角色聊天APP等,套用角色的對話,可以放出聲音來……當然我自己試過了是覺得有一點尬,不過每個人的主觀不同,說不定你會愛上。

廢話不多說,就快去玩玩看吧!


上一篇
Day8 AI影片生成的原理和發展
下一篇
Day10 生成了,然後呢?-AI生成相關的法律問題
系列文
認識AI與NLP的30日旅行團12
圖片
  直播研討會
圖片
{{ item.channelVendor }} {{ item.webinarstarted }} |
{{ formatDate(item.duration) }}
直播中

尚未有邦友留言

立即登入留言